34b8170b60ab987ab8a0f1b9522d09da30c84484
test test
- challenge
- Passage Retrieval
- submitter
- BI Insight
- submitted
- 2022-09-26 10:37:10.563569 UTC
- file basename
- out
test-A / aa298bba02108490769be8dab889e81ac159421a
| Metric | Score |
|---|---|
| NDCG@10 | 41.95 |
dev-0 / 3e5d173c89ae01b9492efcf01752c5ff8cc3612a
| Metric | Score |
|---|---|
| NDCG@10 | 8.31 |
worst items
note: the gold standard is taken from the challenge| # | input | expected output | actual output | test-A NDCG@10 |
|---|---|---|---|---|
| 1 | wiki-trivia W którym państwie leży Bombaj? | 42609-0 2856658-0 119428-0 | 1158331-1 2734991-1 2734948-1 571761-0 1287330-0 1272046-0 1785080-1 4690657-3 1455394-16 1052178-1 | 0.00 |
| 2 | wiki-trivia Co budował w Egipcie inżynier Tarkowski, ojciec Stasia z powieści „W pustyni i w puszczy”? | 934126-1 88267-17 | 750315-0 934126-0 1107075-0 130210-0 313970-0 1515913-0 427787-0 4020875-0 979527-0 2689108-1 | 0.00 |
| 3 | wiki-trivia Kwartet – to ilu wykonawców? | 235415-0 17326-2 2490065-0 69774-0 17332-1 | 4653771-0 5029705-0 1661456-0 2603833-0 4247349-11 1216290-6 1260099-8 4669244-0 1216290-0 4217162-6 | 0.00 |
| 4 | wiki-trivia Do którego państwa należą wyspy Rodos i Korfu? | 1743-6 | 1646270-0 109167-0 2242087-0 2242320-0 2005270-0 552904-0 788902-8 2813234-0 3572733-0 49767-0 | 0.00 |
| 5 | wiki-trivia Uczniem którego greckiego filozofa był Arystyp z Cyreny, twórca hedonizmu? | 120978-0 19180-3 | 912095-5 81011-3 991643-0 991645-0 1436164-0 155182-0 5095863-1 897500-0 169401-1 15628-12 | 0.00 |
| 6 | wiki-trivia Na którym kontynencie leży Gabon? | 74511-0 74511-42 74511-71 74511-93 | 74511-130 3539427-2 916490-0 2249541-0 1367954-0 74511-97 1625997-0 2431143-0 1883796-0 2429972-0 | 0.00 |
| 7 | wiki-trivia Jak nazywa się jednostka w lotnictwie licząca 2–3 eskadry? | 27859-0 799893-7 799893-14 4518252-4 | 146627-0 687110-10 892919-1 99343-5 123958-21 145643-3 88000-5 99343-4 4398951-4 93268-3 | 0.00 |
| 8 | wiki-trivia W którym dniu tygodnia Robinson Crusoe spotkał Piętaszka? | 118590-4 2592188-2 | 1142238-0 1515321-0 1515321-1 1523840-0 1523835-0 1523832-0 1523831-0 1523828-0 1523837-0 1523838-0 | 0.00 |
| 9 | wiki-trivia Jak nazywa się polski okręt bojowy, którym brał udział w II wojnie światowej, a od 40 lat znajduje się w Gdyni? | 4360-0 1932-49 4359-71 387651-2 | 2090427-1 2832117-29 2863853-9 2456735-6 741886-1 3750050-0 2779649-4 1680868-2 1680869-2 2529534-11 | 0.00 |
| 10 | wiki-trivia Z którego państwa pochodzi twórca Gadu-Gadu? | 1930-0 435065-0 1885378-1 | 628058-8 1930-9 1930-16 1694224-0 1101974-4 435065-2 1722311-0 1885378-8 1930-5 68276-27 | 0.00 |
| 11 | wiki-trivia Jak z łaciny nazywa się zmętnienie soczewki oka? | 49463-0 | 144165-2 633838-0 288931-0 1513339-0 2624358-0 2333001-8 1673650-0 1813046-4 2588189-97 1308285-14 | 0.00 |
| 12 | wiki-trivia Mecenasem którego wielkiego kompozytora był król bawarski Ludwik II? | 58136-8 162129-3 | 941032-0 4608972-0 1883386-12 4208494-0 3501949-0 1785122-0 11289-3 1923435-0 1838535-0 1694875-3 | 0.00 |
| 13 | wiki-trivia Jakiego obrazu dotyczy akcja filmu Vinci? | 159017-5 89983-8 170281-11 764160-22 | 225555-0 3279863-0 4919834-0 779791-2 8522-0 1630107-0 4917331-0 2830319-0 3738535-0 852345-1 | 0.00 |
| 14 | wiki-trivia Jak nazywał się twórca Polskiej Akcji Humanitarnej? | 2733-0 437349-12 4306798-3 4211917-8 | 27660-12 5095863-1 1536273-2 1011192-2 550347-0 51483-19 1630876-0 90102-25 4097942-6 1522064-8 | 0.00 |
| 15 | wiki-trivia Która zupa jest symbolem rzeczy bardzo taniej? | 2137401-4 | 5016242-0 2498721-0 1513194-0 60143-214 2485681-0 3717616-0 1956520-0 2100496-0 339801-0 339799-0 | 0.00 |
| 16 | wiki-trivia Z którego kosmodromu startował Jurij Gagarin? | 166906-0 2283748-0 2472693-1 2479587-0 | 204015-0 2882720-0 945650-0 2967260-0 166926-1 11271-16 3556229-0 136552-4 2608-25 3556234-0 | 0.00 |
| 17 | wiki-trivia Sublimat to chlorek którego metalu? | 653476-0 5149678-1 653474-0 5151-8 | 653473-0 649626-0 4000007-0 3989229-0 3989254-0 1737634-0 3993592-0 136795-0 1793263-0 4000002-0 | 0.00 |
| 18 | wiki-trivia Jak nazywa się najwyższy masyw górski Sudetów? | 9879-0 | 1387620-1 843992-13 988157-0 843992-6 42341-4 25911-0 986327-0 725097-0 337219-0 4101230-0 | 0.00 |
| 19 | wiki-trivia W którym starożytnym mieście budowano wieżę Babel? | 10168-12 13187-9 1861864-1 | 557961-0 557961-1 10168-29 3202777-0 1096540-0 3043084-0 1925425-0 5153124-0 11831-15 2890454-0 | 0.00 |
| 20 | wiki-trivia Jak nazywa się wędzony ser owczy produkowany w Tatrach? | 13012-0 13016-0 13015-0 13005-2 613908-4 | 4576682-0 4710309-0 162316-1 1216081-0 354435-4 1886616-0 2468-20 716884-12 1695117-0 2894662-0 | 0.00 |
| 21 | wiki-trivia Sahara Zachodnia posiada duże złoża miedzi, fosforytów czy uranu? | 220899-2 1300844-0 | 1628473-0 2339751-0 4340652-0 942797-0 942761-0 942742-0 752645-0 653014-0 1164605-0 942813-0 | 0.00 |
| 22 | wiki-trivia Proszę podać polską nazwę pierwiastka o łacińskiej nazwie sulfur. | 5581-35 685902-0 | 1910813-0 24742-4 1275519-27 1099762-2 24742-7 183809-5 3270719-0 177334-67 319938-19 1915068-2 | 0.00 |
| 23 | wiki-trivia Jak nazywał się dokument wydany w 1215 r. przez Jana bez Ziemi? | 24139-0 13821-1 51599-27 10021-7 13181-16 | 7023-5 2880291-0 188724-5 257827-2 121193-0 4325093-1 257827-1 836077-8 1548812-6 4366294-0 | 0.00 |
| 24 | wiki-trivia Jak nazywają się dwie liczby rzeczywiste, których wynik po dodaniu wynosi zero? | 736338-0 | 967447-0 9844-0 30332-19 1252807-5 356443-0 59224-0 1361056-5 1385187-3 3578723-0 514566-0 | 0.00 |
| 25 | wiki-trivia Jak z łaciny nazywa się ćwiczenie ortograficzne polegające na zapisywaniu tekstu? | 962835-0 | 692416-4 696567-0 692416-5 4329879-0 2178134-0 1115392-0 1089825-0 2844041-11 4456480-0 1615925-7 | 0.00 |
| 26 | wiki-trivia Który półwysep Azji jest największy? | 105934-0 | 1906525-4 1561044-0 1561022-0 1281635-1 4265682-0 2037617-0 22585-0 1009938-0 185615-0 1777867-0 | 0.00 |
| 27 | wiki-trivia Jakie łacińskie słowa są wygłaszane po wyborze papieża? | 471697-0 490372-6 18084-11 142774-5 | 1075197-2 3464440-41 789267-2 478648-2 1917864-7 320869-10 4901066-0 4940581-0 1452990-1 1166473-1 | 0.00 |
| 28 | wiki-trivia Po śmierci jakiego władcy diadochowie podzielili jego królestwo? | 14426-3 16357-0 12797-103 | 155178-0 155177-0 3005489-1 294873-0 2510837-0 505556-0 59698-0 3236794-0 3236795-0 419067-88 | 0.00 |
| 29 | wiki-trivia W którym roku odbyła się pierwsza próba jądrowa? | 2312943-3 274961-0 1937784-0 1756259-2 4057-3 | 162963-0 272871-0 89783-0 1284956-0 8816-0 144704-0 144704-1 39492-0 1515511-0 790139-0 | 0.00 |
| 30 | wiki-trivia Do kogo należał miecz Durendal? | 48052-0 21626-14 48052-0 | 21625-0 2241569-0 290223-0 1118908-1 2463541-0 1814838-0 4081243-0 208220-3 21626-13 1600947-0 | 0.00 |
| 31 | wiki-trivia W którym państwie ma główną siedzibę agencja prasowa DPA? | 86675-0 86674-0 | 1663921-0 4395606-0 4888139-0 4888145-0 4458468-0 3667557-0 1970984-0 943059-0 2037466-1 3725460-0 | 0.00 |
| 32 | wiki-trivia Jak nazywa się autobus elektryczny zasilany z sieci zawieszonej nad drogą? | 65401-0 | 537099-0 1599463-0 1599461-0 1599459-0 2374769-3 549354-2 1455688-6 2067073-33 5418-140 2161257-3 | 0.00 |
| 33 | wiki-trivia W którym państwie leżą tzw. Alpy Transylwańskie, czyli Karpaty Południowe? | 172832-0 1662028-0 1065819-0 1263801-11 1653912-0 | 1498553-0 1538010-0 1855996-0 170271-2 1213662-0 3208517-0 1855996-2 44895-149 2730768-0 1577445-0 | 0.00 |
| 34 | wiki-trivia Jak nazywała się polska organizacja wojskowa, której dowódcami byli generałowie Grot, Bór, Niedźwiadek? | 733800-15 8777-0 27400-0 | 104191-1 879525-0 9476-4 98592-0 80869-0 1446058-0 567135-0 567137-0 567263-0 94454-0 | 0.00 |
| 35 | wiki-trivia W którym wieku żył Karol Darwin? | 44869-0 1142-4 7395-26 7828-34 | 1867235-2 2883746-0 332877-0 800596-0 3495565-0 1873258-0 2712733-0 332877-2 3479307-0 44869-154 | 0.00 |
| 36 | wiki-trivia Kto napisał „Ziemię obiecaną” oraz „Chłopów”? | 491777-0 503711-0 6624-9 503711-67 | 291-112 620440-3 746926-59 1674604-4 710838-0 774506-15 746926-78 2894917-26 1311868-7 3740698-27 | 0.00 |
| 37 | wiki-trivia Który car rosyjski wprowadził grażdankę? | 129904-0 908-2 22313-16 2854198-24 2705-7 | 568397-0 4222433-0 8786-9 2645748-0 934439-0 3704676-0 4337686-0 2397019-0 1967487-0 1542487-0 | 0.00 |
| 38 | wiki-trivia Jak chciał dać swojej córce na imię węglarz z filmu „Miś”? | 138277-7 | 552200-0 4060568-0 552205-0 552194-0 90189-1 90189-0 2080137-2 2229715-0 817696-0 1658472-4 | 0.00 |
| 39 | wiki-trivia W którym roku wystrzelono pierwszego sztucznego satelitę ziemskiego? | 21622-0 7299-31 504860-13 198755-0 4839-2 | 7798-25 64914-2 7816-29 65009-2 1588277-62 1341003-20 1357839-51 7437-33 8800-68 7692-25 | 0.00 |
| 40 | wiki-trivia Jak nazywała się akcja przesiedlenia Ukraińców z 1947 r.? | 20338-0 785771-2 20297-4 929707-2 968749-0 | 113542-1 2181227-16 8522-0 2830319-0 4917331-0 3738535-0 1630107-0 7567-72 7717-41 7673-130 | 0.00 |